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Abstract of DE1 9536297 

Th method involves strip projection and triangulation using at least one camera (10), pref. a video camera, an image 
sequence digitising and storage device, an illumination projector (1 1 ), an illumination device and an image control 
and processing computer. A calibration device (12) is placed at different positions inside and at the edge of the 
working vol. to be calibrated and illuminated so that regions of its signal marks have maximum grey values or colour 
modulation in the digitised and stored images without saturation. The camera is calibrated using a standard 
photogrammetric method. A projector with a light modulator projects image elements onto the calibration device. The 
projector is calibrated by observing it as an inverse camera. The measured and stored parameters are recovered for 
use with the operational sensor system to correct the beam geometry in the camera and projector. 
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Die Erfindung betrifft ein Verfahren zur geomotrischen 
Kalibrierung von optischen 3-D-Sensoren zur dreidimensio- 
nalen Vermessung von Objekten reiativ zu einem Referenz- 
koordinatensystem, unter Verwendung wenigstens einer 
Kamera (10), einer Einrlchtung zur Digitalisierung und Spei- 
cherung von Bildfolgen der Kamera, einem zur Kamera 
fixierten Beleuchtungsprojektor (11), der zeitlich nacheinan- 
der Lichtstrukturen aus wenigstens eindimensionalen Strei- 
fen innerhalb eines Arbeitsvolumens erzeugt, einer Beleuch- 
tungseinrichtung zur Beleuchtung von reflektierenden Sl- 
gnalmarken einer Kalibriereinrichtung (12) und eines Rech- 
ners zur Steuerung und Verarbeitung der Bilder. Die Kali- 
briereinrichtung wird innerhalb und am Rande des Arbeits- 
volumens in verschiedene Positionen reiativ zu Kamera und 
Beleuchtungsprojektor gebracht und jeweils so beleuchtet, 
daS die Bereiche der Signalmarken der Kalibriereinrichtung 
in den digitalisierten und gespeicherten Bildern eine mog- 
lichst hohe Grauwert- Oder Farbmodulation ohne Obersteue- 
rung aurweisen, b) die Kalibrierung der Kameras erfotgt 
durch ein photogrammetrisches Standardverfahren zum 
Auffinden der Parameter der inneren und auBeren Orientle- 
rung, c) der Pr jektor weist einen Lichtmodulator auf, der 
nach auGen sichtbare Muster aus beiiebigen Streifen odor 
Pixeln els Bildelemente auf die Kalibriereinrichtung proji- 
ziert, d) zur Kalibrierung des Projektors wird dieser als 
inverse Kamera betrachtet, indem den SuSeren Bildelemen- 
ten ein reales oder ... 
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Beschreibung 

Die Erfindung betrifft ein Verfahren zur geometrischen Kalibrierung von optischen 3D-S «^ 
m ensionalen VeYmessung von Objekten relativ zu einem ^ferenzkoord^ 

Streifenprojektion und der Triangulation, unter Verwendung wen.gstens e.ner ^ m ^^%^^^S. 
Digitattsierung und Speicherung von Bildfolgen der Kamera, mindestens einem zur 

tungsprojektor, der zeitlich nacheinander Lichtstrukturen aus wenigstens eindimensionalen Stretf en i nnerhalb 
einfs Arbeitsvolumens erzeugt, mindestens einer Beleuchtungseiririchtung zur gleichmaBigen Beleuchtung von 
reflektierenden und/oder streuenden Signalmarken einer Kalibrieremnchtung und eines Rechners zur Steue- 
rune und Verarbeitung der Bilder sowie eine Vorrichtung zur Durchf Qhrung des Verfahrens. 

Verfahren zur Kamerakalibrierung sind bekannt. Dabei werden mit einer Kamera Punkte aufgenommen, 
deren Koordinaten bekannt sind, also die x-, y- und z-Koordinaten in der Welt bekannt sind und die Bilder 
ausg^ertet Die Kalibrierung der Kamera beruht dann darauf, daB die Bildkoordinaten mit den Weltkoordma- 
ten!n Obereinstimmung gebracht werden. Die Kalibrierung eines Projektors ist imj □nterschied d^chwien- 
ger weil der Projektor gewissermaBen nicht sehen kann, wohin er leuchtet Der Projektor sendet zwar einen 
bestimmten Streifen mit der Nummer x aus, es gibt jedoch keine Moglichkeit mit dem Projektor selbst festzu- 
stellen wo der Streifen in der Welt landet, dazu bedarf es zusatzlicher Hilfsgerate, namheh weiterer Kameras im 
System. Beobachtet man mit einer kalibrierten und orientierten Kamera diese Streifen eines Projektors in der 
Welt und kennt die Streifen, die der Projektor intern (virtucll) gesendet hat, kann man den Zusammcnhang 
zwischen den externen (visuellen) Streifen des Projektors und den internen (virtuellen) Streifen des ^jektors 
herstellen. Jedoch weiB man nicht, an welcher Stelle man sich langs eines externen Streifens befindet Wenn der 
Streifen x gesendet wird, so findet man in der Welt mit der Kamera diesen Streifen x wieder, jedoch wetB man 
nicht, welche x-y-Stelle im Projektor, an der das Licht erzeugt wurde, dann an der Stelle x-y-z in der Welt 
auftauchL Das bedeutet, daB nicht jedem Bildpunkt der Kamera ein raumlicher Koordmatenwert zugeordnet 

^Essindnachenhafte optische MeBverfahren mit einer Matrixkamera und einem Projektor f Or unkodierte oder 
kodierte Streifen bekannt, bei denen die dreidimensionalen Koordinaten der Oberflachenpunkte aus den beiden 
Bildkoordinaten des Kamerabildes und der an der jeweiligen Bildkoordinate detektierten Streifennummer 
berechnet werden (Reinhard W. Malz: Codierte Lichtstrukturen fur 3-D-MeBtechnik und Inspektion, Thesis, 
Universitat Stuttgart 1992, Reihe: Berichte aus dem Institut fur Technische Optik der Universitat Stuttgart). 
Ebenso sind Verfahren mit mehreren Projektoren bekannt. . 

Des weiteren sind photogrammetrische optische MeBverfahren mit mehreren Matnxkameras oder eine 
Matrixkamera in mehreren Positionen bekannt, bei denen die dreidimensionalen Koordinaten eindeutig be- 
stimmbarer Punkte im Raum aus mehreren Ansichten derselben numerisch bestimmt werden. Zur Erzeugung 
eindeutig bestimmbarer Punkte im Objektraum werden naturliche Objektmerkmale, zum Beispiel regulare oder 
stochastische Grauwert- oder Farbverteilungen am Objekt, ebenso genutzt wie kQnsthche Merkmale wie 
auf geklebte oder aufprojizierte Marken bzw. regulare oder stochastische Grauwert- oder Farbverteilungen. 

Bekannt sind des weiteren photogrammetrische Verfahren, die die raumliche Lage einer Kamera relativ zu 
mehreren sichtbaren Referenzpunkten bestimmen konnen, deren absolute Koordinaten bekannt sind (Raumli- 
cher Ruckwartsschnitt). Ebenso sind photogrammetrische Verfahren bekannt, die mehrere raumliche Lagen 
einer Kamera relativ zueinander bestimmen konnen, sofem die aus mehreren Lagen aufgenommenen Bilder 
m hrere gemeinsame Referenzpunkte enthalten, deren Koordinaten vorab nicht bekannt sein mussen (Bundel- 
ausgleichung). Bei diesem Verfahren werden zusStziich zu den Lagen der Kamera auch die Koordinaten der in 
mehreren Bildern sichtbaren Punkte berechnet (Punktmessung). 

Desweiteren sind photogrammetrische Kalibrierverfahren bekannt zur Bestimmung der Strahlgeometne von 
Kameras. Hierbei werden durch mehrfache Beobachtung eines zeitlich invarianten Kahbnerkorpers mittels 
numerischer Verfahren die inneren Parameter der Kamera hinsichtlich Brennweite, Verzeichnungen etc. be- 
stimmt Photogrammetrische Kalibrierverfahren erreichen eine hohe Prazision und erfordern keine Prazisions- 
positioniereinrichtungen. Bei einem Objektfeld von z.B. 250 mm x 350 mm und einer Kumeraaufldsung von 
500 x 700 Pixeln sind lateraie Fehler im Objektfeld von > 10 jim (la) erreichbar. 

Des weiteren ist ein aktives optisches Triangulationsverfahren zur Bestimmung der Strahlgeometne von 
Projektoren zur Oberflachenvermessung bekannt geworden, bei dem der Projektor in der Lage seininuB, 
Linienkreuze zu projizieren, deren Lage von einem photogrammetrischen Kameraverband vermessen wird (Tk 
Strutz: Ein genaues aktives optisches Triangulationsverfahren zur Oberflachenvermessung, Thesis, Technische 
Universitat Braunschweig, 1993). Diese Kalibrierung erfordert somit einen speziellen Projektor, der Linienkreu- 
ze zu projizieren imstande ist ... „ j 
Ebenso sind numerische Kalibrierverfahren bekannt, die den durch Zentralperspektiven von Kamera und 
Projektor sowie durch optische Abbildungsfehler verzerrten Bildraum [#x,y)] mittels Polynome an den 3D-Ob- 
jektraum (x^r^) adaptieren (B. Breuckmann et al: Prazisionskalibrierung von topometrischen Sensoren, LASER 
95, Miinchen, 19.— 23.06.1995). Dabei wird eine weiBe Platte, auf die mehrere schwarze Kreisringe aufgebracht 
sind, mehrfach exakt in Normalenrichtung verschoben und jeweils entsprechend dem Sensorprinzip mit unter- 
schiedlichen Streifenmustern beleuchtet. Die innerhalb der Kreisringe det ktierten MeBwerte werden zur 
Kalibrierung verwendet. Nachteilig ist, daB diese Kalibrierung eine hochgenaue und wohldefinierte mechaniscne 
Positionierung erfordert, da die Kalibrierplatte exakt in Normalenrichtung bewegt werden muB. Des weiteren 
ist die Korrekturrechnung aufgrund der zahlreichen Polynomkoeffizienten langwierig. Das Kalibrierverfahren 
ist nicht fur den Einsatz in Verbindung mit photogrammetrischen Verfahren (Navigation, Bundeltnangulation) 
geeignet, welche auf kompakte und physikalisch begrundete Kamera- und Projektormodelle gestutzt sind. 

Der Erfindung liegt die Aufgabe zugrunde, ein Verfahren der eingangs genannten Gattung und eine Vornch- 
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tung zur Durchfuhrung des Verfahrens zu schaffen, mit wcichen bei einer Messung prinzipiell jedem Bildpunkt 
der Kamera ein raumlicher Koordinatenwert in einem Referenzkoordinatensystem zugeordnet werden kann. 
wobei der Koordinatenwert behebig reproduzierbar ist. 

Zweck der Erfindung ist zum Beispiel, Herstellungsmaschinen, wie Pressen oder Frasen oder Werkzeugma- 
schinen, mittels der Erfindung so zu steuern, daB uber die optische Aufnahme eines Probenkfcrpers ein hochge- 5 
naues WerkstQck als Abbild des Probenkorpers hergestellt werden kann oder softwaremaBig praktisch beliebi- 
ge Manipulationen am virtuellen Bildmaterial vorgenommen und wieder als Werkstuck ausgegeben werden 
kdnnea 

Die Losung der Aufgabe besteht erfindungsgemaB darin, daB a) die Kaiibriereinrichtung innerhalb und am 
Rande des zu kalibrierenden Arbeitsvolumens nacheinander in verschiedene Positionen relativ zu Kamera und to 
Belcuchtungsprojektor gebracht und die Kaiibriereinrichtung jeweils so beleuchtet wird, daB die Bereiche der 
Signalmarken der Kaiibriereinrichtung in den digitalisierten und gespeicherten Bildern eine moglichst hohe 
Grauwert- oder Farbmodulatbn ohne Obersteuerung aufweisen, b) die Kalibrierung der Kameras durch ein 
photogrammetrisches Standard verfahren erfoigt zum Auffinden der Parameter der inneren und auBeren Orien- 
tierung, c) der Projektor einen Lichtmodulator aufweist, der nach auBen sichtbare Muster aus beliebigen 15 
Streifen oder Pixeln als Bildelemente auf die Kaiibriereinrichtung projiziert, d) zur Kalibrierung des Projektors 
dieser als inverse Kamera betrachtet wird, indem den auBeren Bildelementen ein reales oder fiktives x-y-Projek- 
tionsmuster definierter Breite aber unbestimmter Lange im Innern des Projektors zugeordnet wird, und zur 
Bestimmung der Parameter der inneren und auBeren Orientierung des Beleuchtungsprojektors mehrere Beob- 
achtungen (Bildfolgen) herangezogen werden, in denen jeweils geometrische Zusamraenhange zwischen den 20 
x-y-Projektionsmusters (interne Projektorstreifenkoordinaten) und den korrespondierenden auBen sichtbaren 
Mustern hergestellt werden, e)die gefundenen und gespeicherten Kalibrierparameter beim Einsatz des 3D-Sen- 
sorsystems zur Vermessung von Objekten von einem Algorithmus wiederverwendet werden, der einerseits die 
Strahlgeometrien innerhalb der Kamera und des Projektors korrigiert, zum anderen basierend auf dem Prinzip 
der Triangulation die x,y;z-Koordinaten des Objektes im Objektraum berechnet 25 

Der Vorteil des erfindungsgemaBen Verfahrens besteht darin, daB mit demselben prinzipiell jedem Bildpunkt 
auf aufnehmenden Kamera ein raumlicher Koordinatenwert in einem Referenzkoordinatensystem zugeordnet 
werden kann, der beliebig reproduzierbar ist Dazu besteht die 3D-Sensoranordnung aus mindestens einer 
Kamera, wie Videokamera, Still Video Camera, Scanning Camera, und einer Einrichtung zur Digitalisierung und 
Speicherung von Bildfolgen der Kamera, mindestens einem zur Kamera fixierten Beleuchtungsprojektor, der 30 
zeitlich nacheinander Lichtstrukturen aus wenigstens eindimensionalen Streifen innerhalb eines Arbeitsvolu- 
mens erzeugt, mindestens einer Beleuchtungseinrichtung zur gleichmafligen Beleuchtung von reflektierenden 
und/oder streuenden Signalmarken einer Kaiibriereinrichtung und aus einem Rechner zur Steuerung und 
Verarbeitung der Bilder. 

Der Kalibrierkorper (Welt) ist zum Zweck der Kalibrierung mit einem schwarz-weiB-gestreiften Muster 35 
ausgestattet, was ungefahr orthogonal zu dem ges endeten Streifen muster des Projektors liegt Dadurch werden 
die Streifen des Projektors periodisch unterbrochen und es entstehen ungefahr quadratische helle Lichtflecke. 
Diese Lichtflecke konnen von einer Kamera lokal, also in zwei oder in drei Dimensioned detektiert werden und 
geben eine Aussage uber den Ort des Streifens im Referenzkoordinatensystem (Welt). Existieren zur Kalibrie- 
rung eines Projektors zwei Kameras, die ein Stereopaar bilden, so betrachten diese Kameras die Kalibrierplatte 40 
mit den weiBen Quadratea Dieses Stereopaar kann somit diese quadratischen weiBen Flecken der Kalibrierplat- 
te im Raum besttmmea 

Ebenso ist es moglich, auf die zweite Kamera zu verzichten und die Ortsbestimmung der weiBen Quadrate auf 
der Kalibrierplatte mit einer einzigen Kamera zu bewerkstelligea Das ist moglich, wenn mit der einer Kamera 
zunachst der Ort der Kalibrierplatte im Raum bestimmt wird uber einen sogenannten Vorwartsschnitt Voraus- 45 
setzung hierzu ist, daB die Kamera gewissermaBen die Geometrie der Kalibrierplatte kennt und aufgrund der 
perspektivischen Verzerrung die Lage der Kalibrierplatte relativ zu der Kamera berechnet, urn dann in einem 
zweiten Schritt zu bestimmen, wo die weiBen Quadrate in der Ebene der Kalibrierplatte liegen, so daB diese 
dreidimensional bestimmt sind. Zur Projektorkalibrierung wird zunachst ein Zwei-Kamera-System kalibricrt, 
& a es wird von einer Kamera selbst die innere Kalibrierung gemacht und anschlieBend die relative Zuordnung 50 
zucinander, so daB ein komplettes absolut kalibriertes Stereopaar zur Verfugung steht Dieses ist geeignet, 
Punkte im Raum absolut zu verroessen, die von beiden Kameras gesehen werdea Werden somit weiBe Projek- 
torquadrate auf der Kalibrierplatte erzeugt, so konnen diese auch absolut im Raum vermessen werdea Wird 
dies in verschiedenen Stellungen der Kalibrierplatte getan, so laflt sich der Strahlengang der Projektorstreifen 
im Raum verfolgen und durch das Projektionszentrum in der Kamera durch die Projektorpupille extrapolieren, 55 
womit die gesamte Geometrie des Projektors festgelegt ist 

Die relative Position und Orientierung von Kamera und Projektor bzw. Kameras und Projektoren kann 
zueinander temporar, cL a fur die Dauer von Kalibrierung und Messung oder dauerhaft, zum Beispiel durch eine 
mechanischc starre Verbindung fbdert seia 

Zur Selbstkalibrierung der Kamera kann die Kaiibriereinrichtung vorteilhaft wenigstens vier kalibrierte und 60 
eine Vielzahl weiterer Signalmarken oder Referenzmarken aufweisen, die sich im Bildfeld der Kamera befinden 
mussea Daraus konnen zunachst mit Hilfe direkter Losungen (Literatur Beyer) Naherungen fiir die Elemente 
der auBeren Orientierung der Kamera relativ zum Referenzkoordinatensystem (Weltkoordinatensystem) be- 
rechnet werdea Ausgehend von diesen Naherungen kann die exakte auBere Orientierung des aktiv-optischen 
Systems in bezug auf den objektbezogenen Koordinatenrahmen berechnet werden. 65 

In vorteilhafter Weise konnen zur naherungsweisen automatischen Orientierung der Kaiibriereinrichtung 
relativ zur Kamera wenigstens drei der kalibrierten und/oder der Vielzahl der weiteren Signalmarken kodiert 
seia sofern die Koordinaten der letzteren zumindest naherungsweise bekannt sind Mit dem Einsatz kodierter 
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aU R e e fmehreren Kameras konnen diese fiber gieiche oder unterschiedliche Fokussierung fur verschiedene 
EntfeZneen vJ^n ^oZe sie fiber gleif he oder unterschiedliche Bildwinkel verfugen kdnner , wie die 
SmeTas Sch She oder unterschiedliche spektrale Empfindlichkeit aufwe.sen konnen. Ebenso ^nnen d,e 
Kameras £ "die gieiche oder in verschiedene Raumrichtungen blicken und gletchzeitig oder zu untersch.edl.chen 

^aJ^ SSdSverfton Signalmarken mit einem hohen Kontrast mit sehr hoher Genauigkeit vermes- 
senwerdenundzwarwenigstenszwischen 1/30 bis 1/100 Pixel. v^.u^, .;„- 

Will man solche Systeme kalibrieren, die nur aus einer Kamera und einem Projekt bestehen, so .st erne 
ZuT^nfo™?tio erforderlich, es muB dann gefordert werden, daB die Kalibrierplatte exakt beschneben wu£ 
?h daB S ■ voHstandig eben ist und daB die schwarzen Streifen, die den Projektorstreifen Schneider ebenfalls 
mtise deS s ind Is das der Fall, kann aus einem einzigen KamerabUd jeweils die Lage der Kahbnerplatte 
TmRa^ 

ShSSES kam^erfahren werden die weiBen Quadrate auf der Kalibrierplatte von beiden Kameras 
gesTheawdtere Informationen der Platte sind nicht erforderlich. Bern &nkamerakaUT>nerverfahren muB urn 
dfe Srierplatte im Raum lokalisieren zu konnen. auch eine Vermessung der Retromarken oder S.gnalmarken 
Her Ka ^libVfemlattVerfolKen Auf der Basis dieser Information wird eine affine Transformat.on durchgefuhrt, aus 
der sich dietagl de? ergibt Bei der affinen Transformation wird das beobachtete Bild der 

Retromarken b^. S^nalmarkeTmit einem abgespeicherten Bild der Kalibrierplatte verghc^en, die Platte wurf 
Snn^durch eine numerische Operation so gedreht, bis das Bild mit dem angespe.cherten Bud ubere.nst.mmt, 
wodurch dann aUe sechs Freiheitsgrade der Drehung der Translation in jRaum .bek^tMnd. 

Vorzugsweise kann mit einer Kamera und einem Projektor em aktives 3D-MeBsystem kahbnert und_ ein 
soSesKsystem auf gebaut werden. wozu zum Zwecke der KaHbrierung eine : zweite ^^ffi 
die mit der ersten Kamera ein Stereopaar bildet, solange die Kamera kahbnert wird. Nach erfolgter Kalibne 
JungTann dt zwe£ EeTgestellte Kamera wieder entfemt werden, wonach der kalibrierte Projektor z— 
mh der ersten verbleibenden Kamera ein aktives MeBsystem bildet Dieser Ansatz m.t zwe. Kameras ^zur 
Kalibrierong kann selbstverstandlich auch fur Systeme benutzt werden, die von vornherein und permanent zwei 
KamTrasTufweben. In diesem Fall konnte die Streifenauswertung des Projektors sowohl m.t der e.nen als auch 
SeSeVen Kamera erfolgen, so daB gewissermaBen zwei gekoppelte MeBsysteme ^^^^S^ 
der einen Kamera und dem Projektor und das andere Mai mit der anderen Kamera _und ^demselben L^ktor 
arbeTten. Ebenso ist es moglich, daB beide Kameras, wie beim Kalibrieren, auch be.m Messen em Stereopaar 
bilden und der Projektor als zusatzliche Information zur Markierung des Objektes vew ^ e _ t :^, mapkell vorab 

Wesentlich ist, daB die Kalibrierplatte in ihrer Form bekannt ist, die Anordnungen der Signalmarken vorab 
verme^en wird und daB die Kalibrierplatte fiber codierte Marken verfugt die eine automatische Onent.erung 
der^Sl ^bne%Tatte1m Raum erm6glicht; wenigstens vier Gitterpunkte auf der Kalibnerplatte ^^"^n der 
Oriemierungderselben relativ zur Kamera. Vorteilhaft ist es. wenn d.e vier Kahbnerpunkte codiert s.nd, damit 
ihre Reihenfolge automatisch identifiziert werden kann. Farhritter 

Vorteilhaft wird ein Projektor verwendet, der nur ein einziges penodisches Grauwert- oder Jitter 
nroiiziert das in ein Phasenbild umgerechnet werden kann (laterales Phasenshiftverfahren), wobei die fur die 
KM^SSdSSbm Projektorstreifen synthetisch aus dem Phasenbild abgele.tet werden und d 
Sdlwarz-WeiB-Schwarz-Obergange der synthetischen Streifen jeweils Orte konstanter Phase im Phasenbild 

^efAJgorithmus zur Wiedererkennung der Kalibrierparameter korrigiert ebenfalls die ^ frojektonn^l 
vofgesehSS von iiblichen Fehlermodellen fur Kameras abweichenden V"^"^^*^^ 
durch eine zylindrische Projektionsoptik verursachten Fehler; der zunachst nicht d.rekt b * ob * cht *Xt?£ *? e 
dSojektorstreifenswirdzumZweckederVer^eiclmimgskorrek^^^ 

1st die Kalibriereinrichtung eine ebene Kalibrierplatte, so kann s.e wenigstens vier ka l.bnerte S^lmarken 
aufweisen. und das zur Kalibrierung erforderUche schwarz-weiBe Streifengitter bekannter Geometne synthe- 
M erzeug^wen^n Jndtm ein berechnetes Streifengitter mit Hilfe der aktuell bestunmte Onent.erungspara- 
Sr to die Bildebene der Kamera transformiert und mit dem Bild der Kalibnerplatte logtsch verknupft wi^ 

Vorteilhaft ist somit als Kalibriereinrichtung eine ebene Kalibrierplatte, die wemgstens vier kal.bnerte S.gnal- 
marken und ein schwarz-weiBes Streifengitter bekannter Geometrie aufweist i,,iiKri»^ 

Dfa ^Kalibriereinrichtung kann aber auch eine nichtebene Kalibnerplatte se.n, die ."^^J^TSi 
Simalmarken und ein schwarz-weiBes Streifengitter bekannter Geometne aufweist, wobei wemgstens zwei 
S^zum Emsatz gelangen, mit welchen die aktuelle Topologie der Kalibriereinrichtung jederze.t nachmeB- 

ba W S enn die Kalibriereinrichtung eine ebene Kalibrierplatte ist, die wenigstens vier kalibrierte Signalmarken 
aufweLt so kann das zur Kalibrierung erforderUche schwarz-weiBe Streifengitter bekannter Geometne synthe- 
SdT^SSSdS. indem ein berechnetes Streifengitter mit Hilfe der aktuell bestimmten Onent.erungspara- 
meter Z dif BHdebene der Kamera transformiert und mit dem Bild der Kalibnerplatte logisch verknupf ^.rd 

Weitere Vorteile der Erfindung bestehen insbesondere in einer Kostenreduktion durch Verzicht auf mechani- 
schTpSsTo^^^ 

PrazisionsmeBsystemc, wie Theodolit, Interferometer, d.e ansonsten die Lange von Werkstuck oder S»ensor 
vermessen. 

Kurzbeschreibung der Zeichnung. in der zeigen: 
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Fig. 1 eine prinzipielle Darstellung einer Karnera-Projektor-Einheit als Sensor, der auf eine Kalibrierplatte 
gerichtet ist, 

Fig. 2 eine mdgliche Ausfuhrung einer Kalibriereinrichtung in Form einer ebenen Kalibrierplatte, 
Fig. 3 eine schernatische Darstellung der Verschiebung der Kalibrierplatte im Arbeitsvolumen, 
Fig. 4 eine beleuchtete Kalibrierplatte mit retroreflektierenden Marken, 5 
Fig. 5 ein typisches Beleuchtungsf eld eines Projektors, wie er im Verfahren Anwendung findet, 
Fig. 6 eine Kalibrierplatte unter Beleuchtung mit einem periodischen Projektors treifenmuster. 
Fig. 1 zeigt eine kompakte AusfQhrung eines 3D-Sensors bestehend aus einer Kamera 10 und einen Projektor 
11, wobei die StrahJen der Kamera 10 mit x-y-Koordinaten und die eindimensionale Streifenkoordinate des 
Projektors 1 1 mit z bezeichnet sind Weiterhin ist in Fig. 1 eine Kalibrierplatte 12 mit mehreren Signalmarken 13 10 
gezeigt, die sich im Blickfeld von Kamera 10 und Projektor 1 1 befindet 

Fig. 2 zeigt eine mogliche Ausfuhrung einer Kalibriereinrichtung als ebene Platte 21 mit den vier Ecken A, B, 
C, D und mit drei verschiedenen Strukturen: Erstens codierte Marken 22 mit einem eindeutig identifizierbaren 
Label, die in der Mitte der Kalibrierplatte 21 quadratisch angeordnet sind. Weitere uncx)dierte Marken 23, 
weiterhin parallele schwarz-weiBe Streifenmuster 24, die in der Anwendung dann orthogonal zu den Projektor- 15 
streifen stehen und aus den Projektorstreif en stiickweise Abschnitte herausschneiden. 

Fig. 3 zeigt schematise!*, wie eine Kalibrierplatte 30 mit ihren vier Ecken A, B, C, D im Arbeitsvolumen 31 
bewegt wird, wobei das Arbeitsvolumen 31 dargestellt ist durch ein Drahtmodell mit den Punkten PI bis PI 2 in 
Zuordnung der Ecken A, B, C, D die den Punkten PI bis PI 2 entsprechen sollen; diese Punkte werden in einer 
Tabelle abgelegt, Tabelle 1. 20 

Tabelle 1 



Bild 


Ecke A 


Ecke B 


EckeC 


Ecke D 


1 


P 1 


P 2 


P 3 


P 4 


2 


P 2 


P 3 


P 4 


P 1 


3 


P 3 


P 4 


P 1 


P 2 


! 4 


P 4 


P 1 


P 2 


P 3 


5 


P 1 


P 6 


P 7 


P 4 


6 


P 6 


P 7 


P 4 


P 1 


7 


P 7 


P 4 


P 1 


P 6 


8 


P 4 


P 1 


P 6 


P 7 


9 


P 9 


P 10 


P 11 


P 12 


10 


P 10 


P 11 


P 12 


P 9 


11 


P 11 


P 12 


P 9 


P 10 


12 


P 12 


P 9 


P 10 


P 11 


13 


P 5 


P 10 


P 11 


P 8 


14 


P 10 


P 11 


P 8 


P 5 


15 


P 11 


P 8 


P 5 


P 10 


16 


P 8 


P 5 


P 10 


P 11 



Fig. 4 beschreibt die Kalibrierplatte 41 der Fig. 2 und eine Beleuchtung mit retroreflektierenden Marken 42, 50 
wobei nur diese mit erkennbarer Helligkeit zu sehen sind 

Fig. 5 zeigt das typische Beleuchtungsf eld des Projektors, bei dem mehrere Projektorstreifen jeweils zu einem 
Streif enblock zusammengefaBt sind, z. B. ist im Streifenblock 51 der Projektstreif en 1 bis 8 zusammengefaBt und 
auf weiB geschaitet, im Streifenblock 52 sind die Projektorstreifen 9 bis 16 zusammengefaBt und schwarz 
geschaltet usw. 55 

Fig. 6 zeigt die Kalibrierplatte der Fig. 2 unter Beleuchtung mit einem periodischen Projektorstreifenmuster 
unter einem Winkel von 90 Grad; bei dieser Art der Beleuchtung werden die Projektorlichtstreifen in kleine 
quadratische Bereiche 61 unterteilt, die einer Vermessung einer photogrammetrischen Erkennung und Verraes- 
sung mittels Kamera und Bildkorrelation zuganglich sind, und zwar gemaB der Fig. 3. 

Die Erfindung ist insbesondere dazu anwendbar, eine Ein-Kamera-Projektor-Einheit oder eine Zwei-Kamera- 60 
Projektoreinheit unter Verzicht auf teure Prazisionskalibriereinrichtungen zu kalibrieren, um mit einem derge- 
stalt kalibrierten Ein-Kamera-Projektor-Sensor oder Zwei-Kamera-Projektor-Sensor b i einer nachfolgenden 
Messung prinzipiell jedem Bildpunkt der Kamera einen raumlichen Koordinatenwert in einem Referenzkoordi- 
natensystem in eindeutiger und reproduzierbarer Weise zuzuordnen. Damit konnen Herstellungsmaschinen, wie 
Pressen oder Frasen oder Werkzeugmaschinen angesteuert werden, so daB iiber die optische Aufnahme eines es 
Probenkorpers ein hochgenaues Werkstuck als Abbild des Probenkorpers hergestellt werden kann oder softwa- 
remaGig praktisch beliebige Manipulationen am virtuellen Bildmaterial vorgenommen und wieder als Werk- 
stuck ausgegeben werden kdnnen. 

5 
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Patentanspruche 



10 



15 



20 



25 



30 



35 



40 



45 



50 



55 



60 



65 



1. Verfahren zur geometrischen Kalibrierung von optische* 3D-Sensoren zur dreidirnensionalen Vermes- 
sung von Objekten relativ zu einem Referenzkoordinatensyst em auf den P "™P'^ % S ^^^ 
und der Triangulation, unter Verwendung wenigstens einer Kamera (10), vorzugsweise Videokamera, emer 
Eunr?^ und Speicherung von Bildfolgen der Kamera, mindestens ~ 

fixierten Beleuchtungsprojektor (11), der zeitlich nacheinander Lichtstrukturen aus wemgstens e mcfcmen- 
sionalen Streifen innerhalb eines Arbeitsvolumens erzeugt mindestens einer Beleuchtungseinnchtung zur 
gleichmaBigen Beleuchtung von reflektierenden und/oder streuenden Signalmarken emer Kalibnereinnch- 
tung (12) und eines Rechners zur Steuerung und Verarbeitung der Bilder, dadurch gekennzeichnet, daB 

a) die Kalibriereinrichtung innerhalb und am Rande des zu kalibrierenden Arbeitsvolumens nacheman- 
der in verschiedene Positionen relativ zu Kamera und Beleuchtungsprojektor gebracht und die Kali- 
briereinrichtung jeweils so beleuchtet wird, daB die Bereiche der Signalmarken der Kalibneremnch- 
tung in den digitalisierten und gespeicherten Bildern eine mdglichst hohe Grauwert- oder Farbmodula- 
tionohneObersteuerungaufweisen, 9 . , , , . . . 

b) die Kalibrierung der Kameras durch ein photogrammetnsches Standardverfahren erfoJgt zum 
Auffmden der Parameter der inneren und auBeren Orientierung, 

c) der Projektor einen Lichtmodulator aufweist der nach auBen sichtbare Muster aus bebebigen 
Streifen oder Pixem als Bildelemente auf die Kalibriereinrichtung projiziert, 

d) zur Kalibrierung des Projektors dieser als inverse Kamera betrachtet wird, indem den auBeren 
Bildelementen ein reales oder fiktives x-y-Projektionsmuster definierter Breite aber unbestimmter 
Lange im Innern des Projektors zugeordnet wird, und zur Bestimmung der Parameter der inneren und 
auBeren Orientierung des Beleuchtungsprojektors mehrere Beobachtungen (Bildfolgen) herangezogen 
werden, in denen jeweils geometrische Zusammenhange zwischen den x-y-Projektionsmustern (mter- 
ne Projektorstreifenkoordinaten) und den korrespondierenden auBen sichtbaren Mustern hergestellt 
werden, 

e) die gefundenen und gespeicherten Kalibrierparameter beim Einsatz des 3D-Sensorsystems zur 
Vermessung von Objekten von einem /Ugorithmus wiederverwendet werden, der einerseits die Strahl- 
geometrien innerhalb der Kamera und des Projektors korrigiert, zum anderen basierend auf dem 
Prinzip der Triangulation die x,y^-Koordinaten des Objektes im Objektraum berechnet 

2 Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB die Kamera mittels einer Kalibriereinrichtung 
mit wenigstens vier kalibrierten und eine Vielzahl weiterer Signalmarken selbstkalibnert wird. 

3 Verfahren nach Anspruch 2, dadurch gekennzeichnet, daB zur naherungsweisen automatischen Ommie- 
rung der Kalibriereinrichtung relativ zur Kamera wenigstens drei der kalibrierten und/oder eine Vielzahl 
der weiteren Signalmarken kodiert werden, sofern die Koordinaten der leteteren zumindest naherungswei- 

se bekannt sind. _ . . . , , . 

4. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB ein Projektor verwendet wird, der nur ein 
einziges periodisches Grauwert- oder Farbgitter projiziert, das in ein Phasenbild umgerechnet werden kann 
(laterales Phasenshif tverf ahren), wobei die fur die Kalibrierung erf orderlichen Projektorstreif en synthetisch 
aus dem Phasenbild abgeleitet werden und die Schwarz-WeiB-Schwarz-Ubergange der synthetischen Strei- 
fen jeweils Orte konstanter Phase im Phasenbild darstellen. 

5 Verfahren nach Anspruch I, dadurch gekennzeichnet, daB der Algorithms zur Wiedererkennung der 
KaUbrierparameter die im Projektormodell vorgesehenen und von Qblichen Fehlermodellen fur Kameras 
abweichenden Verzeichnungsfehler, zum Beispiel durch eine zylindrische Projektionsoptik yerursachten 
Fehler, ebenf alls korrigiert und daB der zunachst nicht direkt beobachtbare Ort langs des Projektorstreifens 
zum Zwecke der Verzeichnungskorrektur uber eine iterative Rechnung bestimmt wird 

6 Verfahren nach Anspruch 1 unter Verwendung einer ebenen Kalibrierplatte als Kalibnereinnchtung, 
dadurch gekennzeichnet, daB die Kalibrierplatte wenigstens vier kalibrierte Signalmarken aufweist, und daB 
das zur Kalibrierung erforderliche schwarz-weiBe Streifengitter bekannter Geometrie synthetisch erzeugt 
wird, indem ein berechnetes Streifengitter mit Hilfe der aktuell bestimmten Orientieningsparameter in die 
Bildebene der Kamera transformiert wird und mit dem Bild der Kalibrierplatte logisch verknttpft wird. 

7 Vorrichtung zur Durchfuhrung des Verfahrens nach Anspruch 1, dadurch gekennzeichnet, daB die 
kalibriereinrichtung eine ebene Kalibrierplatte ist, die wenigstens vier kalibnerte Signalmarken und em 
schwarz-weiBes Streifengitter bekannter Geometrie aufweist 

8 Vorrichtung zur Durchfuhrung des Verfahrens nach Anspruch 1, dadurch gekennzeichnet, daB die 
KaUbriereinrichtung eine nichtebene Kalibrierplatte ist, die wenigstens vier kalibrierte Signalmarken und 
ein schwarz-weiBes Streifengitter bekannter Geometrie aufweist, wobei wenigstens zwei Kameras zum 
Einsatz kommen, mit welchen die aktuelle Topologie der Kalibriereinrichtung jederzeit nachmeBbar ist 

9 Vorrichtung zur Durchfuhrung des Verfahrens nach Anspruch 6, dadurch gekennzeichnet, daB die 
Kalibriereinrichtung eine ebene Kalibrierplatte ist, die wenigstens vier kalibrierte Signalmarken aufweist 
wobei das zur Kalibrierung erforderliche schwarz-weiBe Streifengitter bekannter Geometrie synthetisch 
erzeugt ist indem ein berechnetes Streif ngitter mit Hilfe der aktuell bestimmten Orientieningsparameter 
in die Bildebene der Kamera transformiert wird und mit dem Bild der Kalibrierplatte logisch verknupft 



wird. 
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